在2023年6月6号的WWDC 2023的最后环节，Apple正式推出了在网上热论已久的全新MR设备— —Apple Vision Pro，并提出了全新的穿戴式设备概念：空间计算平台。

这是至2017年iPhone X之后，Apple的又一次One More Thing。但这一次，无论媒体还是消费者对Apple全新的MR设备评价都褒贬不一，甚至排斥声音居多。

当一大早开完发布会重播后，已经在苹果生态混迹多年，并且常年使用苹果全家桶的我来说，竟对Apple Vision Pro这一款新的MR设备有一丝「既视感」。

在详细对比了现有设备的相似之处后，本章我将和你分享Apple Vision Pro背后隐藏的技术沉淀。

当下人们排斥头显设备的很主要一个理由是「不方便」，其具体表现在于「不好看」、「太重了」、「不舒服」几个方面。而具有设计美学著称的Apple似乎也在追求设计上的美学和实用性之间的平衡点。

2020年11月，Apple发布了首款量产的头戴式耳机AirPods Max，采用网织面料和记忆海绵，整体采用铝合金设计，在保障设计的同时，也从材料上使用头戴式耳机佩戴更加舒适。

图：AirPods Max外观设计

如果说AppleWatch上的数码表冠、侧边按钮很好地结合到了耳机产品线，那么这一次Apple连同AirPods Max耳机的设计元素也都体现到了Apple Vision Pro上。

三维层玻璃、铝合金边框、纺织光密闭遮罩、伸缩头带、数码表冠、磁吸附.....在以往Apple穿戴式设备上反馈优秀的设计尝试，在这一次Apple Vision Pro都可以找到对应的影子。

虽然说它看起来确实没那么惊艳，但总能找到一些其他产品的熟悉感，而不是违和感。

图：Apple Vision Pro外观设计

提及Apple设备和其他设备的差距，感观上很大程度上取决于屏幕显示的素质。Apple在移动办公上推出的5K Retina显示器具备1470W像素、600尼特亮度、10 bit色彩、P3色域、Apple A13 SoC处理器.....每一项参数都接近显示领域天花板。

图：Studio Display

而这一次Apple Vision Pro 使用 Micro-OLED 技术，两块4K显示屏，双眼像素总计达到 2300 万像素，也就是很多媒体所说的单眼4K、双眼8K的显示效果。

视觉方面除了超高的分辨率外，Apple还提供了Eyesight视线追踪功能，可以在用户佩戴头显设备时显示佩戴者的双眼，实现视线对焦对话效果。

图：Eyesight视线追踪功能

值得一提的是，本次Apple Vision Pro使用全新的身份认证框架Optic ID来实现虹膜数据解锁设备，这是既TouchID、FaceID之后又一全新安全认证解决方案，不知道后续会不会下放到其他设备中。

图：内部传感器

在2021年iOS14版本中，Apple在 AirPods Pro等耳机设备中首次推出了「空间音频」功能，通过动态头部追踪技术，给用户带来环绕立体声效果，就如Apple所说的那样如同声音环绕在你周围。

图：AirPods Pro空间音频技术

Apple Vision Pro同样采用了空间音频技术，让用户自由移动头部的同时，让声音锁定并跟随远近大小变化，将声音置于空间内的几乎任何方位，提供身临其境般的环绕声体验。

而降噪模式和通透模式使得用户在隔绝噪音的同时，也能与外界建立交互，而不仅仅沉浸在自己的世界里。

图：Apple Vision Pro空间音频技术

2021年，Apple为AppleWatch添加了一项新的手势识别技术AssistiveTouch，旨在为行动不便、视力、听力和认知障碍人士提供交互操作来使用AppleWatch。

AssistiveTouch手势识别技术，利用陀螺仪和加速计等内置运动传感器，以及光学心率传感器和设备上的机器学习，可以检测到肌肉运动和肌腱活动的细微差别，这让用户可以通过一系列手势，如捏住或握紧，在显示屏上控制光标。

图：手势识别

而在iPad上，借助iPad摄像头，Apple提供了Eye Tracking眼球跟踪功能来辅助用户进行设备控制，并配合语言交互来实现精准控制。

图：语言交互、眼球追踪

Apple Vision Pro在交互采用了三者的结合：视觉聚焦定位、语言交互、悬空手势控制。同时支持使用键盘鼠标操作和控制头显上的按钮、表冠进行指定操作。

图：Apple Vision Pro手势操作

图：Apple Vision Pro操作交互效果

在MacOS设计语言中，我们可以关注到OSX系统的几大明显特点。

首先是底部程序坞，以毛玻璃的「半透明」效果效果排布常用应用程序。其次是右侧的通知中心，类似桌面小组件的控件「悬浮」在桌面壁纸之上。最后是在新版的Ventura系统版本中更新的「调度中心」，让桌面的应用窗口可以模拟3D效果放置在桌面左侧，并快速调出。

图：MacOS操作系统

如果将桌面壁纸去掉，变成通过调用摄像头实时查看到现实的画面，是不是有了新的思路的想法？

而此次与Apple Vision Pro硬件设备发布的还有全新的操作系统— —VisionOS空间操作系统。

VisionOS空间操作系统使用全新的3D交互界面，透过自然光线和阴影的变化来帮助用户理解比例与距离，让数字内容看起来、感觉上就像在用户的真实世界存在。

从主界面效果来看，VisionOS更像是WatchOS的放大版，同样的圆形图标，同样的居中式布局方式，同时融合了MacOS毛玻璃设计语言和圆角窗口特征。有些另类，但也看得出是Apple设计风格。

图：VisionOS主界面

图：VisionOS操作演示

在这里，我认为Apple至少融合了几项我们没有注意到的技术点。

首先是在iPhone12、iPad Pro上已经趋于完善的ARKit框架，通过激光雷达扫描仪和场景几何结构感测对现实中的物品进行场景理解，同时使用前置和后置摄像头来进行面部和现实场景追踪。

图：ARKit增强现实框架

然后是Apple 在 WWDC2019 推出的增强现实应用开发框架RealityKit，借助原生的 Swift API、ARKit 整合、基于物理的超逼真渲染、变换和骨骼动画、空间音频和刚体物理，能够提供逼真的图像渲染、相机特效、动画、物理特效。

图：RealityKit增强现实框架

还有全新 Swift API 「RoomPlan」，可以利用 iPhone 和 iPad 上的摄像头和激光雷达扫描仪创建房间的3D户型图。

通过以上三者的结合，将原有的MacOS操作系统操作理念转变为全新的VisionOS空间操作系统。在推出全新概念的同时，也进一步降低用户的学习的成本和提高用户接受程度。

2020年，Apple自研处理器M1芯片正式推出，随着快速应用到了Mac全系产品、甚至在iPad产品线中替代原有的A系列自研处理器。

2022年，M2芯片发布，采用了8核CPU+10核GPU的设计方案，5纳米工艺，内部晶体管数量达到了200亿个，M2 Max则12核CPU+最高19核GPU设计，更加激进塞入了 670 亿个晶体管。

强大的性能，极低的功耗，超长的续航，迅速拉开了与同行intel之间的差距。

图：Apple自研M系列芯片

Apple Vision Pro也不例外地使用了M2芯片负责主要的计算单元，而另外配合Apple自研的新款R1芯片，负责处理来自 12 个镜头、5 个传感器和 6 个麦克风的信息。新款R1芯片可以在 12 毫秒内将新影像串流至显示器，确保内容低延迟地出现在用户眼前。

图：Apple Vision Pro双芯片架构

头显设备的最大的痛点可能就是供电设备了，本以为此次苹果会提供一种新的解决方案，但有些失望的是并没有。

Apple Vision Pro并没有使用内置电源，在需要驱动显示、音频、处理等设备上采用了外接电池的方式。尽管Apple想让MR设备看上去更加轻盈和方便，但说实话即使是低功耗的M系列芯片，也不是常规充电宝电池能够驱动的，更何况从发布会示意图上看起来，外接电池似乎还不可拆卸。

Apple在这方面，就有些避重就轻了。但想了想，Apple好像产品线的设备续航本就是一大难题，也都没有解决。PS：来自一天2充的iPhone用户。

图：Apple Vision Pro外接电源

看完了本次新推出的Apple Vision Pro，技术水平不可否认是世界领先水平，无论从软件还是硬件上，应该都是目前最优的解决方案。

其硬伤也是明显，Vision Pro像是匆匆忙推出的一款非消费级别的概念产品，无论是3499美刀的高昂售价，还是还未能解决的电源问题，亦或是新推出的可能应用生态还不完全的VisionOS操作系统，从哪个角度看都是半成本的样子。

Apple Vision Pro能否成为未来主流的交互设备，还是说会和AppleWatch一样成为一个非必需品，当前尚未明了。但Apple还是提供了当前它认为最优的解决方案，哪怕还不完善。

我曾经挺崇拜的那个胖子也提出过跨时代计算平台的概念，我在此次Apple发布会身上看到了他的影子，也看到了Apple在开始加快脚步引领世界。

这对一个商业公司来说是一次危险的尝试，而对于一个科技公司而言，是向这个时代宣战。